デジタルコンテンツ視聴の因果効果検証 | 観測期間: 2023/4 - 2025/12
デジタルコンテンツ(webiner, e_contents, Web講演会)の視聴が、品目コード=00001<の納入額に与える因果効果を推定する。視聴開始時期が施設医師ごとに異なる「ずれた処置(staggered treatment)」に対応したDID推定量を使用する。
分析対象は 品目コード=00001 (ENT) の売上データに限定し、医師は RW医師 のみを使用する。
| 用語 | 補足説明 |
|---|---|
| DID (差の差分法) | 処置群と対照群の「前後差の差」で因果効果を推定する準実験的手法 |
| ATT (Average Treatment effect on the Treated) | 処置を受けた群における平均処置効果 |
| TWFE (Two-Way Fixed Effects) | 個体(施設)と時点の両方の固定効果を制御する回帰モデル |
| Callaway-Sant'Anna (CS) | 処置開始時期が異なる場合のバイアスを補正するDID推定量 |
| CATE (Conditional Average Treatment Effect) | 属性条件付きの平均処置効果(異質的処置効果) |
| コホート | 同一時期に処置を受け始めた施設のグループ |
| イベント時間 (event time) | 処置開始からの相対的な経過月数 (e=0が処置開始月) |
| Bootstrap | リサンプリングにより標準誤差・信頼区間を算出する統計手法 |
| 95% CI (信頼区間) | 真の効果がこの範囲に含まれる確率が95%である区間 |
| SE (標準誤差) | 推定値のばらつきの大きさ、小さいほど推定が安定 |
| p値 | 帰無仮説(効果ゼロ)が正しい場合にこの推定値以上が観測される確率 |
| クラスターロバストSE | 施設内の観測値の相関を考慮した標準誤差の補正 |
| 解析対象集団の選定フロー | データソースから段階的な除外基準を適用して最終解析対象を確定する過程の図示 |
| fac_honin (施設本院コード) | 本院に合算したコードで、分析の施設単位として使用 |
解析対象集団の選定フローを以下に示す。売上データ・RW医師リスト・視聴データの各ソースからENT品目を抽出し、施設-医師の1対1対応・wash-out・遅延視聴者の除外を経て、最終的な処置群・対照群を確定した。
| ステップ | 条件 | 除外数 | 残余数 |
|---|---|---|---|
| 初期 | 全品目売上データ | - | 58848 行 |
| [0a] ENT品目フィルタ | 品目コード = 00001 のみ | 40144 行 | 18704 行 |
| [0b] 視聴データ結合 | デジタル視聴 + 活動(Web講演会) ENT品目 | 9604 行 | 2955 行 |
| [A] 複数医師施設 (Step 1) | facility_attribute: 施設内医師数==1 のfac_honinのみ | 238医師 | 97医師 |
| [B] 複数施設所属 (Step 2) | doctor_attribute: 所属施設数==1 の医師のみ | 0医師 | 97医師 |
| [C] RW医師+1:1確認 (Step 3) | rw_list.csv の seg 非空 + 施設医師1:1対応 | 30医師 | 67施設 / 67医師 |
| [D] Wash-out視聴 | 2023/4-5に視聴あり | 2医師 | 65施設 |
| [E] 遅延視聴者 | 初回視聴 >= 2025/10 | 2医師 | 63施設 |
| 最終 | 分析対象 | - | 63施設 (処置41 + 対照22) |
| 群 | 施設数 | 月次売上額 平均 | 月次売上額 SD | パネル行数 |
|---|---|---|---|---|
| 対照群 (未視聴) | 22 | 123.4 | 27.9 | 726 |
| 処置群 (視聴) | 41 | 141.4 | 46.1 | 1353 |
処置群の初回視聴月ごとの施設数分布:
| 群 | 低 | 中 | 高 |
|---|---|---|---|
| 処置群 | 16 | 14 | 11 |
| 対照群 | 5 | 8 | 9 |
除外された医師と解析対象の医師の視聴パターンを比較する。
| 手法 | ATT (処置群の平均処置効果) | SE (標準誤差) | p値 | 95% CI (信頼区間) | 有意性 |
|---|---|---|---|---|---|
| TWFE (全体) | 30.17 | 4.15 | 0.000000 | [22.04, 38.30] | *** |
| CS (全体) | 35.38 | 4.61 | 0.000000 | [26.33, 44.42] | *** |
| CS-DR (全体, 共変量調整) | 34.23 | 6.17 | 0.000000 | [22.14, 46.32] | *** |
| CS (webiner) | 35.73 | 5.47 | 0.000000 | [25.00, 46.46] | *** |
| CS (e_contents) | 30.68 | 7.67 | 0.000063 | [15.65, 45.71] | *** |
| CS (Web講演会) | 32.32 | 4.27 | 0.000000 | [23.96, 40.69] | *** |
| CS-DR (webiner) | 32.73 | 7.07 | 0.000004 | [18.86, 46.59] | *** |
| CS-DR (e_contents) | 29.22 | 8.45 | 0.000544 | [12.66, 45.78] | *** |
| CS-DR (Web講演会) | 34.80 | 6.71 | 0.000000 | [21.65, 47.95] | *** |
| イベント時間 | ATT | SE | 95% CI下限 | 95% CI上限 |
|---|---|---|---|---|
| e=-6 | -4.90 | 4.36 | -13.44 | 3.65 |
| e=-5 | -1.07 | 4.81 | -10.49 | 8.35 |
| e=-4 | -6.98 | 3.66 | -14.15 | 0.19 |
| e=-3 | -6.83 | 4.33 | -15.32 | 1.65 |
| e=-2 | 0.96 | 4.74 | -8.34 | 10.25 |
| e=-1 | 0.00 | 0.00 | 0.00 | 0.00 |
| e=0 | 13.87 | 4.58 | 4.89 | 22.85 |
| e=1 | 24.55 | 4.33 | 16.06 | 33.04 |
| e=2 | 20.65 | 4.99 | 10.86 | 30.44 |
| e=3 | 22.74 | 5.25 | 12.44 | 33.03 |
| e=4 | 22.74 | 4.62 | 13.67 | 31.80 |
| e=5 | 24.99 | 5.30 | 14.61 | 35.37 |
| e=6 | 28.99 | 6.02 | 17.19 | 40.78 |
| e=7 | 30.25 | 4.91 | 20.62 | 39.87 |
| e=8 | 34.75 | 5.20 | 24.56 | 44.93 |
| e=9 | 32.79 | 5.16 | 22.68 | 42.91 |
| e=10 | 36.11 | 6.43 | 23.50 | 48.71 |
| e=11 | 37.26 | 5.99 | 25.53 | 48.99 |
| e=12 | 43.00 | 6.27 | 30.71 | 55.29 |
| e=13 | 48.11 | 5.94 | 36.47 | 59.75 |
| e=14 | 45.88 | 6.44 | 33.26 | 58.50 |
| e=15 | 44.31 | 6.03 | 32.49 | 56.13 |
| e=16 | 34.31 | 6.33 | 21.90 | 46.73 |
| e=17 | 45.82 | 7.05 | 32.00 | 59.63 |
| e=18 | 44.63 | 6.17 | 32.53 | 56.72 |
MR活動(面談、面談_アポ、説明会等)の月次実施回数を共変量として追加した場合の推定結果。 デジタル視聴の効果推定がMR活動の時変交絡に頑健かどうかを検証する。
| モデル | ATT | SE | p値 | 95% CI | 有意性 |
|---|---|---|---|---|---|
| TWFE (メイン) | 30.17 | 4.15 | 0.000000 | [22.04, 38.30] | *** |
| TWFE (+MR活動共変量) | 30.17 | 4.15 | 0.000000 | [22.04, 38.30] | *** |
| 共変量 | 係数 | SE | p値 | 有意性 |
|---|---|---|---|---|
| MR活動回数 | 0.11 | 0.61 | 0.8553 | n.s. |
ATT変化率: 0.0%
Callaway-Sant'Anna (CS) 推定にDoubly Robust (DR) 補正を加え、共変量の差異による交絡を除去した推定結果。 IPW(傾向スコア重み付け: LogisticRegression)とOR(結果回帰: Ridge)を組み合わせており、 どちらか一方が正しければ一致性を持つ(二重頑健性)。
使用共変量 (z-score標準化済み):
| 手法 | ATT | SE | p値 | 95% CI | 有意性 |
|---|---|---|---|---|---|
| CS (無調整) | 35.38 | 4.61 | 0.000000 | [26.33, 44.42] | *** |
| CS-DR (共変量調整) | 34.23 | 6.17 | 0.000000 | [22.14, 46.32] | *** |
| イベント時間 | ATT | SE | 95% CI下限 | 95% CI上限 |
|---|---|---|---|---|
| e=-6 | -0.32 | 9.28 | -18.51 | 17.86 |
| e=-5 | 0.02 | 7.48 | -14.65 | 14.69 |
| e=-4 | -8.03 | 7.43 | -22.59 | 6.52 |
| e=-3 | -9.95 | 6.61 | -22.90 | 3.00 |
| e=-2 | 3.48 | 7.07 | -10.38 | 17.34 |
| e=-1 | 0.00 | 0.00 | 0.00 | 0.00 |
| e=0 | 15.57 | 6.41 | 3.00 | 28.14 |
| e=1 | 22.83 | 6.88 | 9.34 | 36.32 |
| e=2 | 15.04 | 7.01 | 1.31 | 28.77 |
| e=3 | 21.81 | 7.03 | 8.02 | 35.60 |
| e=4 | 21.43 | 7.03 | 7.65 | 35.22 |
| e=5 | 23.32 | 7.05 | 9.51 | 37.13 |
| e=6 | 28.97 | 9.00 | 11.34 | 46.60 |
| e=7 | 29.80 | 6.58 | 16.89 | 42.70 |
| e=8 | 33.56 | 6.32 | 21.17 | 45.96 |
| e=9 | 30.95 | 7.91 | 15.44 | 46.45 |
| e=10 | 32.92 | 8.37 | 16.52 | 49.32 |
| e=11 | 39.64 | 8.13 | 23.71 | 55.57 |
| e=12 | 42.69 | 7.87 | 27.27 | 58.11 |
| e=13 | 45.21 | 8.41 | 28.73 | 61.69 |
| e=14 | 46.43 | 8.72 | 29.34 | 63.51 |
| e=15 | 44.87 | 8.80 | 27.62 | 62.12 |
| e=16 | 35.63 | 8.65 | 18.67 | 52.58 |
| e=17 | 44.72 | 9.16 | 26.77 | 62.67 |
| e=18 | 42.24 | 8.79 | 25.01 | 59.47 |
| チャネル | CS ATT (無調整) | CS-DR ATT (調整後) | 差 (DR - CS) | CS sig | CS-DR sig |
|---|---|---|---|---|---|
| webiner | 35.73 | 32.73 | -3.00 | *** | *** |
| e_contents | 30.68 | 29.22 | -1.46 | *** | *** |
| Web講演会 | 32.32 | 34.80 | +2.48 | *** | *** |
| レベル | N | ATT | SE | 95% CI |
|---|---|---|---|---|
| 低 | 16 | 31.8 | 7.0 | [18.0, 45.5] |
| 中 | 14 | 37.4 | 8.8 | [20.2, 54.7] |
| 高 | 11 | 37.7 | 9.2 | [19.6, 55.8] |
| 比較 | 差 | SE | p値 | 有意性 |
|---|---|---|---|---|
| 低 - 中 | -5.7 | 10.6 | 0.5934 | n.s. |
| 低 - 高 | -6.0 | 12.5 | 0.6325 | n.s. |
| 中 - 高 | -0.3 | 12.4 | 0.9809 | n.s. |
以下の3つの分析アプローチで、視聴パターンと売上の関連性を多角的に検証します:
分析の目的: 視聴1回目、2回目、3回目...それぞれの限界効果を推定し、配信成功率(視聴確率)を考慮した期待効果を算出。 同じ予算で、既存医師への追加配信 vs 新規医師への初回配信、どちらが効果的かを定量的に評価。
医師×月レベルのパネルデータで、視聴回数別の限界効果を推定(TWFE回帰)。
| 視聴回数 | 限界効果(万円) | SE | p値 | 有意性 |
|---|---|---|---|---|
| 1回目 | 1.62 | 2.86 | 0.5715 | n.s. |
| 2回目 | 11.37 | 3.69 | 0.0021 | ** |
| 3回目 | 8.50 | 3.09 | 0.0060 | ** |
| 4回目 | 15.74 | 2.70 | 0.0000 | *** |
| 5回目以上 | 30.58 | 2.85 | 0.0000 | *** |
視聴回数が増えるほど限界効果が増加する傾向(逓増効果)。 5回目以上の限界効果は1回目の約8倍。
配信履歴から、各段階での視聴確率を推定。
| 段階 | 視聴確率 |
|---|---|
| 新規医師(初回視聴) | 3.7% |
| 既存1回 → 2回目 | 31.1% |
| 既存2回 → 3回目 | 40.9% |
| 既存3回 → 4回目 | 22.6% |
| 既存4回 → 5回目 | 58.1% |
配信成功率を考慮した、実質的な期待効果を算出。
| 配信対象 | 視聴確率 | 限界効果 | 期待効果 | 対新規比 |
|---|---|---|---|---|
| 新規医師 1回目 | 3.7% | 1.62万円 | 0.06万円 | 1.0倍 |
| 既存医師 2回目 | 35.5% | 11.37万円 | 4.09万円 | 68倍 |
| 既存医師 3回目 | 47.4% | 8.50万円 | 4.05万円 | 67倍 |
| 既存医師 4回目 | 56.6% | 15.74万円 | 9.76万円 | 161倍 |
| 既存医師 5回以上 | 50.5% | 30.58万円 | 12.82万円 | 212倍 |
全ての視聴回数で既存医師の期待効果が高い(常に既存医師優先)
|
📊 期待効果ランキング: 1. 既存5回以上: 12.82万円 2. 既存4回目: 9.76万円 3. 既存2回目: 4.09万円 4. 既存3回目: 4.05万円 5. 新規1回目: 0.06万円 |
✅ 実務的推奨: • 既存視聴医師への配信を最優先 • 視聴回数が多いほど効率的 • 新規医師への配信は効率が極めて低い • 限られた予算は既存医師に集中投下 |
(a) 視聴回数別の限界効果 / (b) 視聴確率(継続率) / (c) 期待効果の比較 / (d) 期待ROI / (e) 配信優先順位 / (f) 最適配分メッセージ
視聴回数だけでなく 視聴の時間的パターン を考慮し、医師・施設属性による 選択バイアスを調整。
| パターン | 医師数 | 割合 |
|---|---|---|
| 未視聴 | 22 | 34.9% |
| 断続視聴型 | 21 | 33.3% |
| 定期視聴型 | 17 | 27.0% |
| 単発視聴 | 2 | 3.2% |
| 短期集中型 | 1 | 1.6% |
視聴有無を、医師・施設属性(経験年数、診療科、地域、施設タイプ)で予測するLogitモデルを推定。
| 指標 | 値 |
|---|---|
| Pseudo R2 | 0.0000 |
| 視聴群の平均傾向スコア | 0.5000 |
| 未視聴群の平均傾向スコア | 0.5000 |
Pseudo R2が 0.00% で、視聴群の平均傾向スコアが未視聴群より高い。 これは視聴医師が特定の属性(経験豊富、都市部など)に偏っていることを示唆。
逆確率重み付け(IPW)により、属性バイアスを調整した各パターンの平均売上を推定。
| パターン | IPW調整後平均売上 | 医師数 |
|---|---|---|
| 未視聴 | 123.4 | 22 |
| 定期視聴型 | 150.6 | 17 |
| 断続視聴型 | 134.2 | 21 |
| 単発視聴 | 148.6 | 2 |
| 短期集中型 | 123.8 | 1 |
(a) セッション分類分布 / (b) 傾向スコア分布 / (c) IPW調整後の平均売上
MR活動(訪問回数)は 企業が制御可能な変数。MR活動が視聴を介して売上に影響する経路を検証。
| 指標 | 値 |
|---|---|
| MR活動-視聴相関係数 | -0.0144 |
| MR活動の係数 | -0.0087 |
| p値 | 0.6295 |
| 有意性 | n.s. |
相関係数が -0.014 と非常に小さく、 MR活動だけでは視聴をほとんど説明できない。 これは視聴が複数チャネル(ベンダーサイト、MRメール、Web講演会など)から発生し、 MR活動以外の要因が大きいことを示唆。
| 変数 | 係数 | SE | p値 | 有意性 |
|---|---|---|---|---|
| 視聴回数 | 6.004 | 64.188 | 0.925480 | n.s. |
| 効果 | 値 |
|---|---|
| Direct Effect (直接効果) | 0.017 |
| Indirect Effect (間接効果) | -0.052 |
| Total Effect (総効果) | -0.036 |
| 間接効果の割合 | 146.8% |
間接効果(MR活動→視聴→売上)が総効果の約 147% を占める。
(a) MR活動-視聴の散布図 / (b) MR活動と視聴の時系列 / (c) 直接効果の係数
MR活動自体も内生的(売上が良い施設にMRが多く訪問)な可能性あり
視聴回数のみを使うよりは頑健な推定
MR活動は制御可能な変数として、意思決定に活用可能
TWFE回帰により、MR活動とデジタル視聴それぞれの売上への限界効果を推定。
| 変数 | 限界効果(万円/回) | SE | p値 | 有意性 |
|---|---|---|---|---|
| MR活動 | 2.00 | 0.55 | 0.000271 | *** |
| デジタル視聴 | 9.38 | 1.71 | 0.000000 | *** |
コスト仮定を用いて、各チャネルの費用対効果を計算。
| 指標 | MR活動 | デジタル視聴 |
|---|---|---|
| 1回あたりコスト(万円) | 2.0 | 0.5 |
| 1回あたり売上貢献(万円) | 2.00 | 9.38 |
| 費用対効果(売上/コスト) | 1.00 | 18.76 |
複数のシナリオで、コストと売上のトレードオフを検証。
| シナリオ | MR FTE | デジタル予算 (万円) |
総コスト (万円) |
コスト変化 | 売上変化 | ROI |
|---|---|---|---|---|---|---|
| 現状維持 | 100名 | 5,000 | 105,000 |
+0 (+0.0%) |
+0.0% | 5.75 |
| MR半減+デジタル増額 | 50名 | 7,621 | 57,621 |
-47,379 (-45.1%) |
+0.0% | 10.48 |
| MR 30%減+デジタル増額 | 70名 | 6,573 | 76,573 |
-28,427 (-27.1%) |
+0.0% | 7.89 |
| デジタル特化(MR最小) | 20名 | 9,194 | 29,194 |
-75,806 (-72.2%) |
+0.0% | 20.68 |
| 同コストでデジタル最大化 | 20名 | 85,000 | 105,000 |
+0 (+0.0%) |
+16.3% | 6.69 |
(a) シナリオ別コスト / (b) 売上変化率 / (c) ROI / (d) 効率的フロンティア / (e) 配分マップ / (f) 限界効果 / (g) コスト効率性
推奨: デジタル特化(MR最小)
|
📋 現状 MR FTE: 100名 デジタル予算: 5,000万円 総コスト: 105,000万円 ROI: 5.75 |
✅ 推奨配分 MR FTE: 20名 デジタル予算: 9,194万円 総コスト: 29,194万円 ROI: 20.68 |